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§f) PROCEOe ET DISPOSIT1F D' AMELIORATION OE LA VISION NOCTURNE. NOTAMMENT POUR VEHICULE 
AUTOMOBILE. 



(§7) L'invention concern© un proced© d'am^lloration de la 
vision nocturne, notamment pour vehicule automobile, 
consistant, au moyen d'un systeme de prlsa de vue sensi- 
ble aux rayonnements visiblas at non visiblas. a saisir una 
image de la chaussee. eclairee par das projecteurs emet- 
tant dans las domaines du rayonnement visible et/ou da 
I'invisible, tadUe image atant constitute de pixels, points 
elemontaires ayant chacun un niveau de gris, at a appll- 
quar a (adite Image una LUT, loi de transformation das ni- 
veaux de gris, caracterfse en ce que au moins deux lots de 
transformation differentes sont appliquees a des groupes 
de pixels distincts de I'lmage. 

L'invention conceme egalement un disposttif pour la 
mise en oeuvre du precede d'ameJioration de ta vision noc- 
turne decrit precedemment 

Application a Palde & la vision nocturne pour les vehlcu- 
las automobiles. 
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I* presence ir. vend or. se rapports a vr z—^s .. 
un disposicif d'amelicraticr. de la vi.i. - " r.e«~-I" 
notamment pour vehicule automobile. 

II a en effet eCe cor.state que les r=~c-u" ■ 
5 longue portee, dics generaiemen, feux de ~. ^ .'I.. " 
prat.que tres P eu utilises car leur usage est U*^" 
routes tres peu frequences en raison de leur caracal 
eblouissanc. 

D ' autre part, l es f eU x de croi.em.ac ayanc un , 
10 portee volontairemenc ii raitee , ils ne permecL.t de' 
distinguer nettement que les obstacles proches du 
veh.cule, ce qui laisse tres peu de temps au conducteu- 
pour reagir et entreprendre une manoeuvre d'evicemenc. 

11 3 d ° nC «e« propose, notamment dans le 

dOCUment EP - A -° 505 237 < des systemes d'aide a la vision 
nocturne comportant des projecteurs emettanc ' des 
rayonnements de longueur d'onde non visibles (infrarouge 
ou ultraviolet), ainsi que des cameras sensibles a ces 
rayonnements -et recueillant les images ce 1 • environment 
du vShicule, ces images etanc visualisees en temps reel 
dans le vShicule par le conducceur. 

II est egalement connu, notamment par le . document 
EP-A-0 454 SIS, de combiner 1 'image provenant d'une camera ■ 
sensible aux rayonnements infrarouges a celle provenant 
25 d'une camera fonctionnant dans le domaine du rayonnement 
visible, pour former une image unique. 

Cependant, ce type d' image de pays age nocturne 
offre une perception assez peu n .turelle de 
1 'environnement et prSsente des zones de contraste et 
30 d' intensity tris variables. 

On sait par ailleurs que, d'une maniere gSnerale, 
les capteurs CCD (dispositifs a couplage de charge.) , 
utilises dans les cameras des syst&mes d'aide a la vision, 
donnent des images qui ne sont pas fidSles a la perception 
35 visuelle naturelle du paysage. En effec, la perception des 
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contrasted oar " oe .-i ■ 

.1 " oe.i r. amain ~. 

16 ies capteurs CCD Qo-r- —9*- -^--i 

es c *pteurs CCD 
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=— «1. .« TOnti on„ 4 d ,„ s Hoc •" y " 3e "°""" 

P« •ul.f.u.u. du d , ° "««u ess.e 

P*Wa g . „ OCCurne e !• «•"» d« iasges 

par Le proj.e ,»"" v t" d " S >" — M 

°°="rn.. nc,^^ 1 '^ 1 ^*""" * I- v lsior . 

inconvenient* dc u £Z 2 ««pt de, 

xa cechnique ancerieure 

I* proce de -d'amelioracion de la vic< 
no tarament pour vghicule la v. n OCCurne> 

aux rayonne.encs visibles ec _ * 

emettant dans l M ■ eclairee Par des projecteurs 

1' invisible 1 H 65 ^ ray ° nnemenC v "ible ec de 

invisible, ladice image etant constitute de pixels 
Pcnts elemental ayant chacun un „ iveau de 
appliquer a ladite iraage une ^ ^ de 

apolioT " l0lS ^ differences sol 

applies a des groupes de pixels discinccs de 1 i image 

specif icT" ^ " r ° C ^ Sel ° n 1,inVenti -' ™ -aicemenc 
specie peut ecre applique aux differences zones de 
contraste ec de lu.inosice tres different que i on pe - 



es pro 3 ecceurs d'un vehicule. de aanifire a ob-e- 

ledit - ai — • - ^ procht e a ? a b * e p :;/^ 

r.acurelle humaine. P««epei3r 

Selon un autre aspect: de 1 ■ ir.vene « c- i» t, 
est eclairee, d^une parc par au U Ch "™«« 

™teanc dan. |« ^ P«>)ecceur 

a »«» put par «„ „ olns „„ projecc-ur fa.,. , ' 

-^Mri;:: 7,;; ir\:;r;r rr - 

Dans une variance de 1- invent- inn 

domame spectral de 1- ultraviolet. 

Selon une autre caracteristique de !■ invention, 
une loi de transformation des niveaux de gris specifique 
est appliquee a chaque ligne de 1 • image saisie. 

Grace a cette caracteristique, les limites des ■ 
zones traitees ne sont pas visible dans 1 - image obtenue " 
apres le traitement selon 1 • invention. 

Selon une autre caracteristique de V invention, 
une loi de transformation des niveaux de gris specifique 
est appliquee a chaque pixel de 1' image saisie. 

Selon urf autre aspect de 1« invention, la loi de 
transformation associe, a chaque niveau de gris g d'un 
pixel de 1» image saisie, un niveau de gris g' tel que: 
g*« f(g, x, y) = G(x # y) (1 - e -k0l,y,ff ) ou 
g' « 1 si le re*sultat precedent est supgrieur a 1., 
ou x et y sont les coordonn£es du pixel dans 1 1 image et oQ 
G(x,y) et k(x,y) sont des parametres caractSrisant ladite 
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-.ar.s.ormaticn et dependant des cccrdcnnees :< e: v - 
pixel en lequel celle-ci est: appliquee. 

Ainsi, an trai terrene specifique a chaque cixel z 
1* image est applique. 

Selon un autre aspect de 1« invention, la -o< < 
transformation associe, a chaque niveau de gri- 
Pixel de 1» image saisie, un niveau de gris g' teTcue 
g'- h(g, y) s sly) (1 - e" 6 ''" 9 ) ou 
g' = 1 si le resultat precedent est suoer'eu- a • 
ou y est l'ordonnee du pixel dans 1 ■ image et ou S(v)^ c 
t(y) sont des parametres caracterisant Ud'te 
transformation et dependant de l'ordonnee y du oixef^en 
lequel celle-ci est appliquee. 

Ainsi, un traitement specif ique a chaque li gne est 
applique. 

Selon une autre caractSristique de 1« invention, ia 
loi de transformation -des niveaux de gris depend d'un 
parametre de reglage, ledit parametre etant independant 
des coordonnees du pixel en lequel ladite loi de 
transformation est appliquee. 

L ' invention concerne egalement un dispositif 
d' amelioration de la vision nocturne pour la mise en 
oeuvre du procede selon l'une des caracteristiques 
decrites prScSdemment , du type comprenant une camera munie 
de capteurs CCD et d'un module de pilotage desdits 
capteurs. Le dispositif est notamment caracterise en ce 
qu'il comporte une memoire contenant toutes les valeurs 
possibles, predeterminees, de la loi de transformation des 
niveaux de gris.* 

Selon un autre aspect de 1' invention, l'adresse de ' 
stockage de chaque valeur g', image par la transformation 
h d'un niveau de gris g d'un pixel situe" aux coordonn6es x 
et y de l r image, est formde par la concatenation des 
signaux num£riques suivants: 

- le niveau de gris g du pixel, et 



■ I'ordcnnee y dudic pixel. 

Selon un aucre as 

adresse integre dans sa ■ 1 lnven:::r - 

Pixel. 53 t0rroat ^- I'abscisse ;<. 

^ Selon un au-t-a 

Selon d'autres ■ 

dudit pixel. P 1 de ^'^age, 1 ■ ordor.r.e, 

- ledit disposicif comporte en ouc , m 

auc res caractiristiques 
invention ressortiront de ' 1 d LrZj^^ 
plusieurs modes de realisation. d "T Ptl ° n <JU1 suic de 
> en se r«f«r«nr * r a Possibles de 1- invention 

.en referent aux dessins annexes parmi lesquels- 

- la f lgure l repr( |sente schematiquement une imaoe 

v^hicule emettant dans le domaine du rayonnement visible 
et dans celui de 1 • inf rarouge; 

- la figure 2 represente une transformation da. 

ZTT de r is de 1,image de la 1 

mode de realisation possible de 1' invention; 

-la figure 3 illustre schematiquement un premier 
mode de realisation de 1 • invention; 

. - les figures 4a, 4b et 4c illustrent le principe 

du calcul d-un nouveau niveau de gris par une LUT selon le 
premier mode de realisation de 1- invention 

" la figure S illustre schematiquement les zones 
de traitement d'une image du paysage nocturne, eclaire par 
les projecteurs d'un vehicule, selon un deuxieme mode de 
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realisation de I ' invention; 

- la figure 5 illustre schema ti quemenc un de-xi-r, 
mode de realisation de i ' invention. 

Sur la figure 1, on a represer.ee I • image : d- 
paysage nocturne eclaire par les projecteurs" d'Jr 
vehicule, telle qu'elle peut etre recueillie par la camera 
d'un systeme d'aide a la vision, connu en soi* 

One telle image esc composee d'un certain ncmbre 
de pixels, points elementaires de 1- image, qui sor.c 
reperes par leur coordonnees d'abscisse x et d'ordonnee y 
et qui ont chacun un niveau de gris propre g. 

En pointilles, on a figure la voie 2 sur laouelle 
se deplace le vehicule, bordee sur sa gauche d'une zone 
plane 3 et sur sa droite d'un talus 4. 

On peut distinguer dans cette image quatre zones 
de contraste et d' intensity variables. La zone A est la 
plus proche du vehicule et la mieux eclairee par les 
projecteurs de croisement. Cette zone est claire et 
fortement contrastee, elle est done peu interessante pour 
les systemes d'aide a la vision car les obstacles 
potentiels presents dans cette zone sont nettement 
visibles a 1'oeil nu. 

La zone B correspond a la limite de portee des 
projecteurs de croisement. Cette zone est done sombre et 
faiblement contrastee. II est A nocer que la ligne 5 de 
limite entre les zones A et B ne presence pas la meme 
forme sur la gauche de 1* image, correspondant a une parcie 
plane 3 du bord de la voie 2, que sur la droite de 1 1 image 
correspondant a -un talus 4 situe sur I'autre bord de la 
voie 2. 

La zone C correspond a la zone qui est eclairee 
par le rayonnement infrarouge. Elle est sombre mais elle 
peut etre plus contrastee que la zone B en presence 
d'obstacles. Cette zone est e"galement celle qui est 
eclairee par les feux de route a longue portee lorsque 



ceux-ci sent actiennes. la ligne 6 cie li B -. 

zones B et C a ser.sibiement la .T.er.e e ~r-e ™. - """ 

.uBir.e --r.„e cue ia i ig-* 

ce limite entre les zones A et B. 

La zone D est la plus eloignee cu vehicul- 
n'est jamais eclaxree ni ?ar les proj ecteur S de c-o"sen~. 
nx par les feux de route car elle est d'un foible 
pour la conduite. .Elle correspond en effet ;ensibleme"nc' 
dans le paysage, au del. et a tout ce qui , sc en de , Q „ s 
de la chaussee sur laquelle se deplace le vehicule Ell- 
est done tres sombre et il peut y avoir un ^ £ " 
dans le signal delivre par la camera pour les points 
1* image situes dans cette zone. 

La ligne de limite 7 entre les zones C et D sui<- 
sensiblement les lignes de fuite vers !■ horizon de la v 0 ^ 
2 avec un decalage sensible vers la droite de ladice voie. 

Dans 1- image ainsi decrite de la fi gure i n 
existe done deux zones B ec C qu'il est inceressant de 
craiter afin d'en augmenter le concrasce et la luminosity 
car une detection anticipSe des obstacles presents dans 
ces zones peut permettre au conducteur d'effectuer 
d'Sventuelles manoeuvres d'evitements. de ruaniere plus 
efficace. 

L 1 image 1 de la figure 1 peut done etre segmented 
en zones (A, B, C et D) d'interet variable et comme le 
contraste et la luminosite sont tres diff<§rents dans 
chacune de ces zones, un traitement selon !■ invention 
consiste a appliquer des LOT specifiques a chaque zone de 
1' image pour en amdliorer la perception par le conducteur. 

II se . peut toutefois que les LOT les mieux 
adapters aux differences zones soient sensiblement 
diff6rentes les unes des autres, et que 1 1 application du 
traitement decrit ci-dessus a une image comme celle de la 
figure 1 fasse apparaitre des limites entre les zones 
traitees. 

Dans ce cas, pour que les limites entre les zones 
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ne soient -as visib'es *-*s. 

- s ' - a tra-temen; se'en 

peuc ecre aDolicue su - h oc /sn:: " 

B i„. . "" dSS 9rou?es d e pixels da 

Plus pet^s que lss 2cres 

decrites, - n D ,.- <eiI ^„ P«cede5S3e- = 

pa. -.CLxier on P eut aoD-i— » r ■•- 

- lxe - ae x image par exemol* 
Sur. la figure 2, on a represent* la - 0 .,-s □ • 
transformation de£ niveaux dg ..J^^ 3 

exemple de realisation de !• invention. Jn 

Cette LUT transforme u * nivea 
dans Lexeme de realisation entre o et i. d , un pM 



Cette LUT transforme u» niveau de gris g . 
- dans Lexeme de realisation entre 0 et i o-'un ! ^ 



9'= f (9- X, y) = G (x, y) (1 . e -K'K.y. 9) ou 

= 1 si le resultat precedent est suoerieur a i 
OU C,x,y, et k(x , y) sonc des param ^ res ' 

la transforation f et gui, selon llinvention> enE 
es coordonn.es ( x,y> du pixel sur le ^ el on 
ladite transformation. 

Ce type de transformation f. representee par la 
courbe 8 . realise une correction logarithmigue de 1 • image 
en rehaussant davantage le contraste dans l es zones 
sombres , ue dans les zones claires, ce qui donne a lac'ce 
image un aspect plus pro che de la perception naturelle de 
I'oeil humain. 

La derived de la fonction f par rapport a g, 



UJ k(x,y)G(x t y)e' klx - Y) \ . 



caracterise la modification du contraste de 1' image. 

Sur la figure 2, on a reprSsente une droite 9, qui 
est tangente a la courbe 8 a l'origine (0,0} "du repere, et 
a une pente k(x,y)G(x.y) qui correspond a la de*riv£e de f 
par rapport a g a l'origine, c'est a dire pour g=0. 

Cette droite 9 presente une pente superieure a 1, 
ce qui signifie que, dans les zones sombres de 1 • image 
(celles qui ont des niveaux de gris proche de 0), le 



cor.crasce esc augment par la transformation . 

One deuxieme droice 10. cangente a :« a 
U. Pour un niveau ce gris ccrre.pond.Rs g, a "" 
Cdiriv.. de f par rapport , 5 ?Qur g=g . ^ 
= s.gnxfie que, dans les zones de l> itaage u _ i;,.^ "J 

9ri- a g„ les concras.es ,.e sonc ? a s codif 

transformation f. ~ - a 

Une «=«*•«■• droice cangence » I, courbe , „ 
13, ce qui correspond au niveau de gris Q -i n ~- 

*, W « se ,c.u.. dor , les „ iveaux ds 

transformation f. H ~ a 

Le. Parametres G (x.y) et M X,y) dependant des 
coordonnees (x.y, du pixel sur ^ on ^ ^ ? £- 

URe cransfonnacion f specific^ peuc etre appliouee en 
chague pixel de 1 ' image, . done les parametres G(x y) . t 
Je(x.y) caracterisenc 1 • amelioration du contraste pour i.« 
Riveaux de gris sombres ec decrminent le niveau de gris g 
a partir duguel le contraste est attenug. 

Bien entendu, ces parametres peuvent etr- ' 
ideRtiques pour plusieurs pixels de 1 • image situSs a des 
coordonnees x et y diffSrentes de manure a effeccuer des 
corrections specifiques a d_-s groupes de pixels de 
1 ' image . 

Ainsi, selon 1 • invention, la correction des 
niveaux de gris ne se fait pas de maniere URiforme sur 
toute 1' image mais elle est specif ique 4 chaque pixel cu 
groupe de pixels de manifire a optimiser ladite correction 
suivant le coRtraste et la lumiRositg dudit pixel ou 
groupe de pixels. 

A la figure 3, on a reprSseRte ur mode de 
r€alisatioR de la traRsformation f decrite ci-dessus. 

Or R'a represent^ sur ce schdma que les liaisons 
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utiles a la comprehension de 1' invention. Les conr.exicr.s 
aux alimentations et aux broches de configuration des 
processeurs par exemple r.'onc pas ete menticnnees. 

Une camera 20 munie d'une matrice de capteurs CZZ 
21, par exemple de taille 256x256 pixels, est controlee 
par un module de pilotage 22 des capteurs CCD. 

Ladite camera 20 delivre un signal video 
analogique 23 qui contient les niveaux de gris analogizes 
des pixels de 1 ' image saisie^ et qui est dirige vers 
1' entree d»un convertisseur analogique - numerique (CAN) 
24, ledit convertisseur fournissant a sa sortie un signal 
numerique 25 contenant les niveaux de gris g, numerises 
sur k bits. 

Si le capteur CCD est de taille 256x256 pixels et 
qu'il fonctionne a* la cadence vidSo de 25 images par 
seconde, la frequence d* arrived des niveaux de gris dans 
le convertisseur 24 est superieure ou Sgale a* 1,6 MHz. II 
faut done ensuite un processeur de signal numSrique qui 
puisse travailler avec un tel debit de donnSes . 

Les processeurs de signaux numSriques DSP (de 
1 1 anglais Digital Signal Processor, ou - processeur de 
signal numerique) sont capables de travailler a des 
cadences superieures a 1,6 MHz et dans une variante de 
1* invention non representee, un tel processeur pourra etre 
utilise pour realiser la transformation f par 
1 ' intermediaire d'un programme implante- dans ledit 
processeur. 

Dans le cas de la figure 3, la transformation f 
est re*alis6e en "logique cablSe ce qui permet cVutiliser un 
processeur plus' lent et done beaucoup moins couteux, tel 
que le microcontroleur 26 . 

Ledit microcontroleur 26 travaillant a une cadence 
plus lente que celle fournie classiquement par une camera 
a capteurs CCD, il est adapte* £ controler ladite camera et 
a travailler sur des trames d* images m£moris6es a plus 
faible cadence. 
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Le microcontroleur 26 fcurnic, a 3 ar-— ■«•-.-- 
sortie 41, un signal 27 commandant le temp. d'ouve\~ 
la camera et un signal 28 donnant un top de lectu- 
capteurs CCD a chaque ; maae ]pcrf^ e 

dinges vers 1 'entree d'un n-emi^r- ^ ♦ 

un vernier module ae commande -c 
du pilote 22 des capteurs CCD. 

Le module de commande 29 a une sortie 30 c'-gee 
vers 1. entree d'un generateur de signaux d'horlcg. 3 - 
ledit generateur retournant des cops d'horloge au moduli 
de commande 29 par 1 ■ intermediate d'un signal 32, 4u" 
d'une sortie du generateur 31 ,c entrant par une entree" 35 
dans le module de commande 29. 

Ledit module de commence 2 9 presente egalement une 
sortie 37 delivrant des signaux de synchronisation video 
38, synchronisation de ligne e: synchronisation de trame 
lesdits signaux etant utilises pour commander un moniteur 
d'affichage de 1» i mage , une foU celle-ci traitee. 

Le generateur de signal d'horloge 31 presente une 
deuxieme sortie fournissant M signaux d'horloge 33, 
lesdits signaux entrant dans un dernier module 34 du 
pilote des capteurs CCD 22. Cu module 34, dont la sortie 
est dirigee vers une entree de la matrice de capteurs CCD - 
21, sert d' interface avec ladite matrice en effectuant, 
entre autres, une adaptation des niveaux d ■ impedances . 

L'ensembles des modules 29, 31 et 34 precedemment 
decrits forment le pilote 22 des capteurs de la matrice 
21. 

Les signaux d'horloge 3 3 issus du generateur 31 se 
repartissent . en deux types de signaux: un signal 3 9 
30 present ant un .front (montan:: ou descendant) a chaque 
nouvelle ligne de 1* image, et un signal 40 presentant un 
front de commutation a" chaque nouveau pixel d'une ligne. 

Le signal d'horloge pixels 40 est relie a une 
entree 40a du convertisseur analogique - numerique 24 et 
35 il permet de commander ledit convertisseur en fournissant 



a ce dernier un zcp d'horloge a chaque ncuveau ' cixel 
ledit cop d'horloge declenchanc la numSrisacicn d-ur. 
pixel . 

Le signal d'horloge pixels 40 esc ecalerr.er.t relie 
a 1' entree 40b d'un circuit compteur de colcnr.es 42. Ce 
circuit recoit un top d'horloge a chaque nouveau pixel er 
il incremente, a chacun de ces tops, un compteur de 
colonnes. L' information du numero de colonne permec de 
connaitre la coordonnee d' abscise x (en se referant a la 
notation adoptee figure 1) de chaque pixel. 

Le circuit compteur de colonnes 42 recoit 
egalement, sur son entree 39b, le signal d'horloge lignes 
39, qui fournit un top d'horloge a chaque nouvelle ligne 
de 1' image, ledit top d'horloge declenchanc la remise a 
zero du compteur de colonnes. 

A la sortie du circuit compteur de colonnes 42, an 
signal 44 contenant l'abscisse x d'un pixel, numSrisSe sur 
m bits est delivre. 

Le signal d'horloge lignes 39 est relie" Sgalement 
a 1 'entree 39a d'un circuit compteur de lignes 43. Ce 
circuit recoit un top d'horloge a chaque nouvelle ligne de 
1' image et il incremente, a chacun de ces tops, un 
compteur de lignes. Cette information sur le numero de 
ligne permet de connaitre la cordonnee d'ordonnee y (en se 
ref grant a la notation adoptee a la figure 1) de chaque 
pixel. 

Le circuit compteur de lignes 43 recoit egalement, 
sur son entree 47, le signal 28 issu du microcontroleur 
26, qui fournit -un top d'horloge a chaque nouvelle image, 
ledit top d'horloge d§clenchant la remise a zero du 
compteur de lignes. 

A la sortie du circuit compteur de lignes 43, un 
signal 45 contenant 1'ordonnee y d'un pixel, numerisee sur 
1 bits est dSlivre*. 

Les signaux 44, contenant la coordonnee x sur m 
bits, et 45, contenant la coordonnee y sur 1 bits, sont 
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f'-sicnnes. de maniere ro.-.r.ue, en «, sia -.. .- - 
concatenation des dcnnees x €C , * " " ?2r 1 

bitS. /( " nUn: *«** IB.- T.. 

25, 1SSU du coavertisseur analogicua - • 
-tenant le niveau de gris g ^ « • 

niveaux de gris decrite , ' ' <« 

Cependant, un parametre supplements r. „ 
microcontroleur 26, Deut PP^menta.re p, 1SSU du 



— oieur 26, peut Stre utilise 

parameter la transforation f . Par exe' ' 
applies un craitemenc dl *l o on peut 

est prise au crepuscule et da,s le cas oQ e esc 
pendant la pleine nuit. prise 
Un signal 49. iS£ . a d , une 

m.crocontroleur 26, contient _,dit parametre „ • 
sur n bits n parametre p, numerise 

ur n bits, et xl vient se concatener avec le signal 48 
prec demment d , crit pQur ^ si 

donnees g, x, y et p numerisees sur k+m-l + n bits 

Ledic signal 51 est ensuite applique a !• entree 
d-une LUT 52 gui transforme le niveau de gris g ini^ e 
un nouveau niveau de gris g . . suivant la transformation f 
precedemment decrite, ledit niveau de gris g- etant 
numerise sur k- bits dans le signal de sortie 53 de la lut 



52. 



Le principe du calcul du nouveau niveau de gris g- 
par la LUT 52 • sera mieux compris en se reportant aux 
figures 4a a 4c. 

Sur la figure 4a, on a represents une image 60 
telle qu'elle peut gtre obtenue par la matrice de capteurs 
CCD d'une camera comme celle 20 decrite a la figure 3. Sur 
cette image on a figure un pixel 61 particulier, situe 
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dans I' imag e aU point de coordor.nees Ix.yJ. « ava- 
niveau de gris g. * ~" 

A partir de ces donnees, or. ao ,- ... 
l'enseignemenc de la f igu re 3, obcenir un s«~a<~T 
contenant les donnees g, x, y ec p . s numerise su ' r ^: 
bits. * % --»..-.. 

Ledit signal 51 sere a former, pour chaque oixel 
^ 1 xmage, une adresse seion le tableau de la f igu ^ < b 
10 IT! a - dire " C ° nCatinant bits du niveau de gris g 

1 abscisse x et les n bits du parametre p. 

^ L f adresse ainsi formee est envoyee dans une 

meagre 62 de type ROM (de l- anglais Read Only Memory, ou 
m^oxre accessible seulement en lecture) representee a la 
figure 4c. A I'adresse 63 correspondante de ladite memoir 
est stocks la valeur de 1- image par la transformation * 
(parametree par p) des -donnees g, x , y, p contenues dans 
I'adresse, soit f p (g,x,yUg'. 

La memoire 62 est choisie de taille suffisante 
20 pour contenir les valeurs des images par la transformation 
f de toutes les combinaisons possibles de donnees g, x, y, 
p. 

Le niveau de gris g\ numerise sur k» bits, 
constitue le signal de sortie 53 de la LOT 52, en se 
25 referant a la figure 3. 

Sur la figure 3 on a egalement - represents une 
m&noire de stockage d' image 54, ladite memoire etant de 
type RAM (de 1* anglais Random Access Memory, cm memoire a 
accSs aliatoire^ et etant destinie a memoriser les trames 
30 d' image de maniere a ce que le microcontrdleur 26, 
fonctionnant a une cadence plus faible que celle du signal 
vidSo Smis par la matrice des capteurs CCD 21, puisse 
travailler sur les trames d* images mSmorisees a plus 
faible cadence. 

35 Ladite memoire d 1 image 54 recoit sur son entree 56 



15 



20 



a* 
s 



ie signal 25 {repr*sen-£ ^; 

"-^^ben.e ici oar le be - • ■ » - 

: s °r nant ie aive - de » « chaque pix' e rv;; 

- sa lslC par la nacrice . e capteurs P - - - ,- : 
d'autre pare, sur son entree S3 , " ?31 

r ~ u „oc.c ion ae ' • 

La memoire 54 est h« 1 
microcontroieur 26 par llir * d . ?1US relige - 

5S. vehicular les Lve.ux de g sT ^ ' "1 ^ * ""^ 
ci'un bus d-adresses 56, vehicle les ^ ?iXSl ' " 

de colonne dudit pixel! nUmer ° S de ^ « 

3 on - A U SOrtiS ^ ClrCUiC 3l ° bal d<§cri ' - la ^iaure 
3, on dxspose du signal 53 , contenanc * 

transforms g- numerises sur k . bits ec T de 9riS 
synchronisation video 38. Ces signal 53 38 " " 

ensuite envoyes vers un ■ P6UVenC §Cre 

nvoyes vers un moniteur d'affichage aorSs ..„. 

conversion nun.eri.ue - analogic, des niveaux de g'ris g 

Dans une variante du mc ie de realisation prese,te 
* 1- f^re 3, on peut omettre le m odule 57, fi gu J en 
pointilles, en remplacane u ni figure en 

rempiacant le microcontroleur 26 par un 
generateur de signa ux d-horloge delivrant les signal 27 
commandant le teenps d'ouverture de la camera, et 28 
dormant l es tops de lecture des capteurs CCD a cnague 
xmage Dansce cas, les li aisons figurees en pointiu , es 
25 , 46' et 49 sont egalement omises. 

Dans une deuxieme variante de ce mode de 
realisation de 1 ' invention, on peut omettre seulement le 
parametrage de. la transformation f, e'est A dire le 
parametre p. issu de la sortie 50 du microcontroleur 26 et 
vehicule par le signal 49. 

Sur la figure S, on a represents une image 101 du 
paysage nocturne eclaire par les projecteurs d'un vehicule 
similaire & celle de la figure 1. 

.Les zones A, B, C et D de segmentation de 1 ' image 
decrites a la figure 1 se retrouvent sur 1 ' image 101 et 
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les Unices desdites zor.es or.t ece ici representees or. 
traits discontinus. 

D'autre parr, la voie sur laquelie circule le 
vehicule est representee par le poinrille 102. 

Comme la zone D, sicuee au dela de la lior.e de 
limite 107 esc peu inceressante pour le conducted cu 
vehicule et que, par consequent, ses pixels ne necessitenc 
pas de traitement specifique, et que d'autre oarc, les 
autres zones A, B et C sent, separees par des limites 
sensiblement horizontals, il peut etre interessanc 
d'approximer lesdites zones A, 3, C ec D par les zones a ' 
3', C et D\ ces dernieres etant separees par des limites 
105, 106, 108 qui sont des droites paralleles a 1 ' axe des 
abscisses x. 

Avec une segmentation de 1 1 image de ce type, 
purement horizontal, une transformation des niveaux de 
gris plus simple peut etre appliquee, qui ne tient compte 
que du niveau de gris initial g du pixel et de l'ordonnee 
y dudit pixel, ec qui ne cient plus compte de 1'abscisse x 
du pixel comme dans la transformation f decrite 
prScedemment . 

A titre d'exemple, on peut appliquer une 
transformation h, qui a tout niveau de gris g d'un pixel 
. ayant pour ordonnee y, associe un niveau de gris : 
h(g, y) « S(y) (1 - e ' c<m ) ou 
g 1 = 1 si le resulcat precedent est superieur a 1, 
ou S(y) et t(y) sont des parametres qui caracterisent la 
transformation h et qui dependent de 1' ordonnee y (ou 
num^ro de ligne-) du pixel sur lequel on applique ladite 
transformation . • 

A la figure 6, on a represents un deuxieme mode de 
realisation de 1' invention selon le principe evoque ci- 
dessus. 

On retrouve dans ce schema 1'essentiel des 
Elements de la figure 3, portant des references 
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squires, et on pcurra se repor=er . u ^ 
-xgure 3 pour la comprehension de ce schema'. ""*" 



le 
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La difference priacipale encre ce schema 

ese; 

ne t Pnc r^=^ , ae -eausac;or. 



_ -.^.;jd»e enure 
de la figure 3 reside dans le fair ~ue 
ne comprend P l us de circuit compceur 



present schema 



ne tient pas compCe de 1)abKL 

ene est appliquee , „ n . esc P - - e 

le numero de la colonne dudic pixel. 

En consequence, le signal 4 8 est 
realisation constitue de la B " ^ d * 

ari. „ concatenation du niveau de 

*«. g< provenanc du signal ^ " 

provenant du signal 45 ec , y ' 

sur k*l h^c n a S19nal 43 esC numerise 

15 de r ' 16 Si9nal 51 C ° nCienC *™ « -de 

15 de realisation, le niveau de gris inicial g d . un . p - xel 

I'crdonnee y dudit pixel et un parametre ? 

parameter la transformation h. ledit signal 4z J 

numSrise sur k+l+n bits. 

Une autre difference du present schema avec ce'u- 
de la figure 3 vient du fait que la memoire d< image "54 
recoit, sur son entree 59, non pas le signal 46 contenanc 
les numeros de ligne et de colonne de chaque pixel, ma i s 
le S1 gnal 45 (represents ici par le pointille 45') 
contenant uniquement le numero de ligne du pixel, c'est a 
25 dire son ordonnee y. 

Le fonctionnement de la LOT 52 esc le meme que 
celui decrit aux figure 4a a 4c et l'avantage principal de 
ce mode de realisation est la diminution de la taille de 
la memoire (rSfSrencee 62 a la figure 4c) necessaire pour 
stocker toutes les valeurs possibles de la transformation 
h. 

Dans ce mode de realisation, une meme 
transformation h est appliquee k toute une ligne de 
1' image, ce qui donne aprSs traitement une image encore de 
tres bonne qualite puisqu'on ne peut pas voir apparaltre 
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de limites de zones craicees. ' •■ 

En variance de ce node de realisation or 

4g.l-n.nc supprimer i s nodule „ cont ^S"^ 

nucroconcroleur. ou seulemenc ie signal 49 con-.enanc '.1 
parametre p. 

Dans une aucre variance de 1 • invention. on 
re.li.er les calculs des transforation f ou h directed 
en temps reel (sans storage des resultats ore-caries 
dans une memo ire, « i- aide ^. un processeu ; de \^ * 

i:r DSP ' mais ce cype de — — esc *;: u ; 

17" ^ SXempleS de Causation decries ci-dessus mais 
englobe touCes variances. 

Notamment, la memoire de stockage des valeurs p-g- 
calculees des trans formation f ou h peut etre constitute 
de plusieurs boltiers de type ROM de faible capacite 
rel le s « des circuits d'adressage et de multiplexage qui 
convaennent, ou meme elle peut etre constitute de k< 
boitiers de x bit relies en parallele et plus 
generalement, elle peut etre constitute par toute memoire 
adressable, rapide, susceptible de stocker durablement un 
tableau de constantes. 
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1 - Procede d » amelioration de la vision r.oc*- — 
notammenc pour vehicule automobile, consiscanc" Ttc- 
d«un systeme de prise de vue sensible aux rayor.rere- cs 
visibles et non visibles, a saisir une image de la 
chaussee, eclairee par des projecceurs emettant dans l- s 
domaines du rayonnement visibly et de 1- invisible lad-e 
image etant constitute de pixels, points elemental 
ayant chacun un niveau de gris, et a appliquer a lad-. 
image une LUT, loi de transformation des nivcaux de gris, 
caracterise en ce que au moins deux lois de transformation 
differentes sont appliquees a des groupes de pixels 
distincts de 1» image. 

2 - Procede d ' amelioration de la vision nocturne 
selon la revendication r, caracterise en ce que la 
chaussee est ^clairee, d'une part par au moins un 
projecteur emettant dans le domaine du rayonnement 
visible, et d'autre part par au moins un projecteur 
emettant dans le domaine du rayonnement infrarouge, le 
systdme de prise de vue comportant des moyens de saisie 
sensibles au domaine spectral du visible et a celui de 
1 ' inf rarouge . 

3 - Procede d ' amelioration de la vision nocturne 
selon l'une des revendications l ou 2, caracterise en ce 
qu'une loi de transformation des niveaux de gris 
specif ique est appliquee a chaque ligne de 1 ' image saisie. 

4 - Procede d 1 amelioration de la vision nocturne 
selon l'une des revendications 1 ou 2, caracterise en ce 
qu'une loi de transformation des niveaux de gris 
sp£cifique est appliquee a chaque pixel de 1 ' image saisie. 

5 - Procedt d' amelioration de la vision nocturne 
selon- l'une des revendications 1, 2 ou 4, caracterise" en 
ce que la loi de transformation (f) associe, a chaque 
niveau de gris g d'un pixel de 1 ' image saisie, un niveau 
de gris g* tel que: 
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g'= f(g, x, y) « Gtx, y) 11 - e"*'*'''*) cu 
g' c 1 si le resultat precedent: .est superieur a 1, 
ou x et y sont les coordonnees du pixel dans 1 ' image e: cu 
G(x,y) et k(x,y) sont des parametres caractdrisant ladi-e 
transformation et dependant des coordonnees x et y 
pixel en lequel celle-ci est appliquee. 

5 - Procede d • amelioration de la vision nocturne 
selon l'une des revendications 1, 2 ou 3 , caraccerise en 
ce que la loi de transformation (h) associe, a chaque 
niveau de gris g d'un pixel de 1 • image saisie, un niveau 
de gris g« tel que ; 

g' = h(g, y) = Sty) (1 - e' ztY>q ) ou 

g' » 1 si le resultat precedent est sup<§rieur a 1, 
ou y est l'ordonn£e du pixel dans 1' image et ou S(y) et 
15 t(y) sont des parametres caractSrisant ladite 
transformation et dependant de l'ordonne"e y du pixel en 
lequel celle-ci est appliquee. 

7 - Proced§ d' amelioration de la vision nocturne 
selon l'une des revendications 5 ou 6, caracterise en ce 

20 que la loi de transformation (f,h) des niveaux de gris 
depend d'un parametre (p) de reglage, ledit parametre 
etant independant des coordonnees (x r y) du pixel en lequel 
ladite loi de transformation <f,h) est appliquee. 

8 - Dispositif d 1 amelioration de la vision 
25 nocturne pour la mise en oeuvre du procede selon l'une des 

revendications precedentes, du type comprenant une camera 
(20) munie de capteurs CCD (21) et d'un module de pilotage 
(22) desdits capteurs, caracterise en ce qu'il comporte 
.une memoire (62-) contenant toutes les valeurs possibles, 
predetermines,, de la loi de transformation (f,h) des 
niveaux de gris. 

9 - Dispositif d'ameiioration de la vision 
nocturne selon la revendication 8, caracterise en ce que 
l'adresse de stockage de chaque valeur lg'), image par la 
transformation (h) d'un niveau de gris (g) d'un pixel 
situe aux coordonnees x et y de 1' image, est formed par la 
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concatenation des signaux r.urr.erigue. ,u iv «r.-«. 

- ie niveau de gris ; g ; d'j pixel. e -. 

- l'ordonnee (y) dudit pixel. 

l° - Di.po.icif d'ameli orj -_ion de 
nocturne selon la revendication 9 , caracterise 
1 adre.se de stocxage de chague valeur (g , 5 . ifaage pa _ (| 
reformation (f) d . un niveau ^ d .^ P o x ; a 

foL t aUX r° rd ° nn ' eS X 6C y * 1,im ^ e ' dans ."a" 

formation l'abscisse (x) dudit pixel. 

11 - Di.po.itif d. amelioration de l. vls - 0 „ 
nocturne selon 1'une de. revendications 9 ou T 
caracterise en ce gue 1'adresse de stockaae de h 
TZ V.' ^ - ^ ™mation ^ 



que 



de gris (g) d . un pixel situ , aux coordonn ' ees x ^ 
1 image, integre dans sa formation on parametre ■ (p, de 
reglage de ladite transformation. 



12 - Dispositif d' amelioration de la v<sio _ 
nocturne selon 1'une des revendications 8, 9, io ou" n 
caracterise en ce gu'il comporte un circuit compteur de 
Ugnes delivrant, pour chague pixel de 1'image, 1'ordonnee 
(y) dudit pixel. 

13 - Dispositif d' amelioration de la vision 
nocturne selon la revendication 12, caracterise en ce 
gu'il comporte en outre un circuit compteur de colonnes 
delivrant, pour chaque pixel de 1' image, l'abscisse (x) 
dudit pixel. 

14 - Dispositif d' amelioration de la vision 
nocturne selon l'une des revendications 8 a 13 prises dans 
leur dSpendance de la revendication 7, caracterise en ce 
qu'il comporte un. microcontroleur (26) dSlivrant le 
param&cre (p) de rSglage de la transformation (f,h). 
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54. Process and device for the improvement of night vision, notably for motor vehicles. 

57. The invention concerns a process of improvement of night vision, notably for motor vehicles, 
consisting by means of an image recording system sensitive to visible and non-visible rays, to 
capture an image of the roadway, illuminated by headlights emitting in the ranges of visible 
and/or non-visible wavelengths, the said image being constituted of pixels, elementary points 
each having a gray level and to apply the said image to an LUT, law of transformation of gray 
levels, characterized in that at least two different laws of transformation are applied to distinct 
groups of pixels of the image. 

The invention also concerns a device for the implementation of the process of improvement of 
night vision previously described. 

Application to aiding night vision for motor vehicles. 
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0 Pr ° CCSS ^ 3 **» «* *• im P~ of night vision. 

It has been observed that long-range headlights are in practical terms very little used since their 
usage is limited to little-traveled roads due to their dazzling effect. 

Furtherniore, high beam lights having a limited range, do not allow one to clearly distinguish 

Therefore, systems have already been proposed, notably in document EP-A-0 505 237 to aid 
night vision which include headlight emitting rays of non-visible wavelengths (infra-red or 
ultraviolet), as well as cameras sensitive to these rays and which collect images of the vehicle's 
surroundings, these images being visualized in real time in the vehicle by the driver. 

Notably, through document EP-A-0 454 516, an approach which combines the image coming 
from a camera sensitive to infrared rays to that of a camera operating in the visible range, to form 
a single image, is also known. " 6 

However, this type of image of the nocturnal surroundings does not provide a very natural 
perception of the environment and has zones of highly variable contrast and intensity. 

It is known, in addition, that in a general way, CCD sensors (charee coupling devices, used in 
cameras for improving vision, produce images that are not faithful to the natural visual 
perception of the landscape. In effect, the perception of contrasts by the human eye is more 
logarithmic whereas CCD sensors are more or less linear. 

This problem with CCD sensors is usually corrected by applying a gray level conversion table, 
LUT, or Look-Up Table, to the signal produced by the said sensors. 

This principle can also be applied in order to improve the image contrast of the nocturnal 
surroundings as mentioned in document EP-A-0 454 516. 

But these treatments do not give very satisfactory results due to the nature of the images of the 
nocturnal surroundings, which are very dark' in zones that are not illuminated by the vehicle's 
headlights and very bright in the illuminated zones of the image. 

A principal aim of the present invention is to solve the above-mentioned problems. 

To this effect, the present invention concerns a process and a device for improving night vision, 
notably for motor vehicles, free of the disadvantages of the previous technique. 
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consi'Thv Z ,mPr r V,ng - mght ViSi ° n * n ° ,ably f0r mo,or vehic,es . <"™*">& to the invention 
consists, by means of an image recording system sensitive to visible and non-visible rav^ s to 

siSe — ^H 0 ' the / 0ad 7 y ' , '? minated by h " dV * hts emitti "e in the visible Z 
visible ranges of the spectrum, the sa,d image being constituted of pixels, elementary points Teh 
haying a gray level and app y a LUT, law of the transformation of gray levels o the said m? E e 

s^tssaic; least - te - ° f f — - « 

surroundings illuminated by the vehicle headlights, in such a way as to , J IS 
treatment, an lm age which is close to that of natural human perception. 

Sl2S 8 J°-r ther ?u PeC - °u f , ,he inVent, ' 0n ' the r0adwa y is iIlu ™<*ted, on the one hand, by a 

lead 2 ZT* * V ' S ' f b,e r f" ge ° f the SpeCtrUm - and ' 0n ,he other ha "<*. at leas one 
headhght em.ttmg ,n the mfrared range, the image recording system including an image 
captunng means that is sensitive to the visible and infrared ranges of the spectrum. 

The infrared image recording system allows for the detection of objects in zones that are not 
usually illuminated by the high beam lights of vehicles. es mat are not 

In a variation of the invention, a headlight emitting in the ultraviolet range can also be used 
associated with an image capturing means that is sensitive to the ultraviolet spectral range. 

According to another characteristic of the invention, a law of transformation of specific erav 
levels is applied to each line of the captured image. 

Due to this characteristic, the borders of the treated zones are not visible in the image obtained 
after treatment according to the invention. 

According to another characteristic of the invention, the law of transformation associates, at each 
gray level g of a pixel of the captured image, a gray level g' such that: 

9- f(g, x, y) = G(x, y) (1 - e^ )a ) or 

g' = 1 if the preceding result is greater than 1, 

where x and y are the coordinates of the pixel in the image and where G(x, y) and k (x, y) are 
parameters characterizing the said transformation and are dependent on coordinates x and y of 
the pixel in which the above is applied. 

Thus, a specific treatment of each pixel of the image is applied. 

According to another aspect of the invention, the law of transformation associates, at each gray 
level g of a pixel of the captured image, a gray level g' such that: 
g' = h(g,y) = S<y)(1-e- , nor 

' IL Note - Meaning of source language unclear. Literal translation is provided. 
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9' ■ 1 if (he preceding result is greater than 1, 
where y is the ordinate of the pixel in thp ; ma „„ a l 

characterizing the said «- <W are parameters 

's applied.' dependent on the ordinate y of the pixel to which this 

Thus, a specific treatment is applied to each line. 

^S.^'SS^ISS^ *? - of Nation of gray ,eve,s is 
Pixel to which the said' L ofZ^Z™^™* of «* -rdina'tes of the 

equipped with CCD sensors and a P HoE mooule 5 1 °f * of 8 ^ ^'^"g a camera 
characterized in that it has a memo J ^co^toS n^Sl f Sen T L The dev '« » notably 
the law of transformation of gray * ^ ^ which are P r *°*em,ined, of 

formed by the concatenation Sr^ tS£i^SS^^^ * ^ * ° f ima86 ' * 

- the gray level g of the pixel, and 6<"*'g™s. 

- the ordinate of the said pixel. 

According to other characteristics of the invention* 

o^ d o?^:%r 8 C0Umin8 " * «* *- of .he image, the 

^^1^^^™ ""»* * - t*- of the 

Wonlion!'" inClUdCS 8 micr<w:ontroller Mi ™<* ^e setting parameter of the 

Other characteristics^ advantages of the invention will become clear in the followine 
description of several possible .ways of implementing the invention and with reference to the 
attached illustrations, among which: 
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-Figure 2 repents a S^^^Jt^^J**-- W»«J 
with a possible form of execution of the inSon 8 fr ° m F ' 8Ure ' in accordance 

-'fC itrS 4M?T. teS K he ^ f ° m °^ XeCUtion ° f the invention; 
^P^SZ^Z^^ " ° - - h, a LUT 

n.=afe^ 

invention; wramg 10 a second form of execution of the 

Zone C corresponds to the zone which is illuminated by inffared rays. It is dark but it can be 
more contrasted than zone B when obstacles are present This zone is also that which is 
illuminated by the long-range headlights when they are activated. Line 6 is the limit between 
zones B and C and has more or less the same shape as line 5 which is the limit between zones A 

Zone D is the farthest from the vehicle and it is not illuminated by the headlights nor the turning 
signal lights since it is of little interest for driving. It corresponds more or less to the landscape, 
the sky and all that is beyond the roadway upon which the vehicle is travelling. It is therefore 
very dark and there can be significant noise in the signal delivered by the camera for the points of 
the image located in this zone. 

The line of limit 7 between zones C and D more or less follows the lines of escape to the horizon 
of lane 2 with a significant gap towards the right of the said lane. 
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In the image, as described in Figure 1 two zones R »„h r ,u r 

"»l k onto to taoo*™ contrast «i b*E ,EL J??!" m ° f lmCTra • 

«• =M x,yj = G (x, y) (I- e^*) or, 
g'= I if the preceding result is greater than I, 

This type of transformation f, represented by curve 8, executes a logarithmic correction n f * 
■mage by mcreasing the contrast more in the dark zones than in the bSSL S rives he 
sa,d .rnage an appearance which is closer to the natural perception oftfKSjJ^ 8 

The derivation of function f in relation to g, 

c£. =k(x,y)G(x, y)e**» f 
dg 

characterizes the modification of the contrast of the image. 

In figure 2, straight line 9 is represented, which is tangential to curve 8 at the origin fO 0) of the 
location and has a slope k(x, y) G(x, y) which corresponds to the derivation of f in relation to g 
at the origin, that is to say for g=0. * 
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havmg a gray level equal to g*. the contrasts are not modified by transformation f § 

A third line 12 tangential to curve 8 in 13, which corresponds to the gray level g+l has a slooe 
der.vat.on i of f m relation to g for g=I) far below 1, which means tha\ in to£^£& 
the .mage (those whose gray levels are dose to I) the contrast is lowered by transfo Jltion f 

The parameters G(x, y) and k(x, y) are dependent on coordinates (x, y) of the pixel to which the 
LUT is applied, a specific transformation f can be applied to each pixel of ffln^Sh£ 
parameters G(x y) and k(x y) characterize the improvement of the contrast fori I&El 
and determine the gray level g*, from which the contrast is lowered. 

Ob viously these parameters can be identical for several pixels of the image located at different x 
and y coordinates, m such a way as to make specific corrections to groups of pixels of the Tage 

Thus according to the invention, the correction of gray levels is not performed in a uniform 
~ th % ent,re ,ma 8 e ; h * ' s *Pf* c * each pixel or group of pixels in such a way as 
3 correction following the contrast and brightness of the said pixel or group of 

In Figure 3, a form of execution of the transformation f described above is represented ' 
In this diagram, only the relationships useful in the understanding of the invention are 
represented. For example, the connections to supplies and to configuration pins of processors 
have not been mentioned. 

A camera 20 equipped with a matrix of CCD sensors 21, of a size of 256x256 pixels, for 
example, is controlled by a piloting module 22 of CCD sensors. 

The said camera 20 delivers an analog video signal which contains analog gray levels of pixels of 
the captured image and which is directed to the input of the analog-digital converter (ADC) 24, 
the said converter providing a digital signal 25 at the output containing the gray levels g, 
digitized on k bits. 

If the CCD sensor is of 256x256 pixels in size and it operates at the video rate of 25 images per 
second, the frequency of the arrival of gray levels in the converter 24 is greater or equal to 1.6 
MHz. A signal processor that can handle such a flow of data is therefore required. 

The digital signal processors (DSP) are able to operate at rates greater than 1.6 MHz and in a 
variation of the invention which is not represented, such a processor could be used to execute 
transformation f by means of a program integrated in the said processor. 



2 IL Note - Illegible subscript symbol in the original text due to the poor quality of the copy. 
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J2c i£zs%£zssx vi r h r wired circuit «** • 

The said microcontroller 26 oSKTTlIl ? u " the microco '«™ller 26. 

sensor can,**, it is adap ed to S VJt^Zl** ^ M b > * CCD 

images at a lower rate. mera and t0 work on memorized sequences of 

-^-tputof^ 

a viewing mo „ it or for the uo^iSSSS^^ *" ^ S ' 8 " a,S USed to Control 

directed to the input of \ matr x of CCD sensS . ' Th ' S m °, du,e H whose out P ut is 

-outing, amongUer^ With -* 

Together, modu.es 29, 3., and 34, piously described, make up the pilot 22 of sensors of the 
The clock signals 33 from generator 3 1 are divided into two types of signal- a sianal 39 that h« . 

JSk ^' Cl0Cks ' 6nal 40 is 1 h00ked "P to a « i"P« 40a of the analog converter by supplying a 
clock p,p for each new p.xel to the converter, the said clock pip triggering the digitization of a 

The pixel clock signal 40 is also hooked up to input 40b of a column counter circuit 42 This 
circuit receives a clock pip for each new pixel and it increments, at each pip. a column counter. 
The information of the column number makes it possible to know the coordinates of abscissa x 
(referring to the notation used in Figure 1 ) of each pixel. 

The 'column counting circuit 42 also receives the line clock signal 39 at its input 39b, which 
provides a clock pip with each new line of the image, the said clock pip triggering the setting of 
the column counter back to zero. 

At the output of the column counting circuit 42. a signal 44 containing the abscissa x of a pixel, 
digitized on m bits is delivered. 
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The line clock signal 39 is also hooked up to the entry 39a of a line counting circuit 43 Thi< 
circuit receives a clock p p for each new line of the imaje and it adds a I ne w th Sof theSo 
o a |,„e counter. Th,s information on the line number makes it possible to know the wrZlt 
(refernng to the notation used in Figure 1) of each pixel. • coordinate > 

The line counting circuit 43 also receives at its input 47 the sienal m >«,,;„» r .i. 

o A n uT!sdeh-ve re e d C0Unting CifCUit * 45 "^''"i" 8 the ° rdinate > ° f a «*»«■ «t«- 

The signals 44 containing the coordinate x on m bits and 45, containing the coordinate y on I bits 
SS^^r^ ,m0aSi8na ' 46 f0tmed concatenation of the xa^'d^'ta 

Signal 46 is then concatenated with signal 25, produced by generating the analog-dieital 
converter 24 and containing the gray level g digitized on k bits to form signal 48 containing Se x 
.y, and g data digitized on k-H+m bits. containing tne x 

SnsfoimiSi 8 J 0 "*™, *? !? f0 Ti,°? 8 ' X> and y " eCeSSar y for ,he a PP'''^''on of the 
transformation f of the gray levels described in Figure 2. 

However, an additional parameter p, produced by generating microcontroller 26, can be used in 
such a way as to parametrize transformation f. For example, a different treatment can be applied 
in die case where the image is taken at sundown and in the case where it is taken in the middle of 
the night. 

A signal 49, issuing from the output 50 of microcontroller 26, contains the said parameter p, 
digitized on n bits and concatenates with signal 48, previously described, to form signal 51 
containing the g, x, y and p data digitized on k+l+m+n bits. 

The said signal 5 1 is then applied at the input of a LUT 52 which transforms the initial gray level 
g into a new gray level g', following the previously described transformation f, the said gray 
level g' being digitized on k' bits in the signal of output 53 of LUT 52. 

The principle of the calculation of the new gray level g' by LUT 52 can be better understood by 
referencing Figures 4a to 4c. 

In Figure 4a, an image 60 is represented such that it could be obtained by the matrix of CCD 
sensors from a camera such as 20 described in Figure 3. On this image a particular pixel 61 is 
drawn, located in the image at the point of coordinates {x, y} and having a gray level g. 
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From these data one can. according to Figure 3, obtain a signal 51 containing the g, x, y, and p 
data digitized on k+l+m+n bits. The said signal 51 serves to form, for each pixel of the image, an 
address according to the table in Figure 4b, that is to say by concatenating the k bits of gray level 
g of the said pixel with I bits of ordinate y, the rrvbits of abscissa x and the n bits of parameter p. 

The address thus formed is sent to a memory 62 of a ROM type (Read Only Memory) 
represented in Figure 4c. At the corresponding address 63 of the said memory, the value of the 
image by the transformation f (parametrized by p) of the g, x, y, and p data contained in the 
address , f p (g, x, y)=g' is stored. 

The memory 62 is of a sufficient size to contain the values of images by the transformation f of 
all the possible combinations of the g, x, y, and p data. 

The gray level g' , digitized on k' bits, constitutes the output signal 53 of LUT 52 in reference to 
Figure 3. 

Figure 3 illustrates an image storage memory 54, the said memory being of a RAM type 
(Random Access Memory) intended to memorize the frames of the image in such a way that the 
microcontroller 26, working at a lower rate than that of the video signal emitted by the matrix of 
the CCD sensors, can work on the frames of memorized images at a lower rate. 

The said image memory 54 receives at its input 58 the signal 25 (represented here by the dotted 
25') containing the gray level g of each pixel just as it is captured by the matrix of CCD sensors 
21. In addition, it receives, at its input 59, the signal 46 (represented here by the dotted 46' ) 
containing the line and column numbers of the said pixel, that is to say its x and y coordinates 
(according to the notation in Figure 4a). 

In addition, memory 54 is hooked up to microcontroller 26 by means of a data bus 55, conveying 
the gray levels g of each pixel and an address bus, conveying the line and column numbers of 
each pixel. 

At the output of the overall circuit described in Figure 3, is signal 53, containing the transformed 
gray levels g' digitized on k' bits, and video synchronization signals 38. These signals 53, 38 can 
then be sent to a viewing monitor after digital-analog conversion of gray levels g\ 

In a variation of the form of execution for this invention presented in Figure 3,. module 57, drawn 
with dots, can be omitted, by replacing microcontolier 26 with a clock signal generator delivering 
signals 27 controlling the time period the camera is open, and 28 giving reading pips of the CCD 
sensors with each image. In this case, the relationships drawn with dots 25', 46' , and 49 can all 
be also omitted. 

In a second variation of the implementation method for this invention, only the parametrizing of 
transformation f, that is to say parameter p, issuing from output 50 of the microcontroller 26 and 
conveyed by signal 49 is omitted. 

Figure 5 illustrates an image 101 of nocturnal surroundings illuminated by headlights of a vehicle 
similar to that of Figure 1. 
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be applied, which for any gray level g of a pixel having an 
ray level: 



g; = h(9,y) = S(y)(1.e- tMfl )or 

g* = 1 if the preceding result is greater than 1, 

Where S(y) and t(y) are parameters which characterize the transformation h and i 
dependent on ordinate y (or line number) of the pixel to which the said transformation ii 

Figure 6 illustrates a second form of execution of the invention according to the 

ovrtla marl rUaimi 



explained above. 5 " Hnncip,e 

In this diagram, the essentia! elements of Figure 3 are illustrated, with similar references and one 
can refer to the description of the said Figure 3 in order to understand the diagram. 

The principal difference between this diagram and Figure 3 lies in the fact that the present 
diagram no longer has the column counting circuit. In effect, since the transformation h of this 
form of execution of the invention does not take abscissa x of the pixel into account, as it is 
applied, it is no longer necessary to know the column number of the said pixel. 

Consequently, the signal 48 is, in this application, constituted by the concatenation of gray level 
g, coming from signal 25, with ordinate y, coming from signal 45 and the said signal 48 is 
digitized on k=I bits. Likewise, signal 51 contains, in this application, the initial gray level g of a 
pixel, the ordinate y of the said pixel and a parameter p serving to parametrize transformation h, 
the said signal being digitized on k+l+n bits. 

Another difference of the present diagram from that of Figure 3 comes from the fact that the 
image memory 54 receives, at its entry 59, not signal 46 containing the line and column numbers 
of each pixel, but signal 45 (represented here by 45', drawn with dots ) only containing the line 
number of the pixel, that is to say, its ordinate y. 
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The functioning of LUT 52 is the same as that described in Figures 4a and 4r * n A *u» • • i 

J£,7Zf . • SU , re 4C) reqU ' red ,0 S,0re 8,1 the P° ssib,e values of transformation? 
According to this implementation method of the invention, the same transformation h™ aonlied 

— -* - 

~n| n t i!l!! r / Va -i ati0 . n ° f th<! inVen,i ° n ' calculations of transformation for h can be made directly in 
real turn (without storing pre-calculated results in a memory) by means of a dieta S 
processor DSP, but this type of application is more costly. 6 8 

Obviously, the present invention is not limited to the implementation examples described above 
but encompasses all variations. v uwioeo aoove 

Notably, the storage , memory 'for pre-calculated values of transformation for h can bi restituted 
of several cases of ROM of low capacity hooked up to address and multiplex circuits which are 
appropriate, or even it could be constituted of k' cases of I bit hooked up in parallel and more 
generally, it could be constituted of all addressable memory, rapid and capable of storing a table 
of constants in a permanent manner. 
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CLAIMS 



^nfJ! r n e ,mpr0Vement ° f night Visi0n * notablv for moter vehicles, consisting bv 
means of a fi mmg system sensitive to visible and non-visible rays, to capLe an Se of 

he 222 tTT d wm l headlights emittins in the visible and 0 

he sp ectnim, the sa.d image bemg constituted of pixels, elementary points each with a «v 
hair H°- aP f P , y ,0 Mid image 3 LUT ' ,aw of transforation of gray ffi 

sss ^j&ls: ^ different ,aws ° f - f ~ i - « a pp>ied JdS 

2- Process for the improvement of night vision according to Claim 1, characterized in that the 
roadway ,s .nominated, on the one hand, by at least one headlight emitting wales in Z 

Z S tT e f SP 7T a " d ° n the ° thCT hand ' * at ,east headlig ^emSg "avt 
in the mfrared range of the spectrum, the filming system equipped with the image can urine 
means that .s sensitive to the visible spectral range and that of infrared. S P 8 

3- Process forthe improvement ofnight vision according to Claim 1 or 2, characterized inthata 
specfic law of transformation of gray levels is applied to each line of Jhe capturedtaage 

4 ' IZTf ll 0r f he im , prov 7 ent ° f ni 8 h ! vision acc °rding to Claim I or 2, characterized in that a 
law of transformation of gray levels is applied to each pixel of the captured image. 

5- Process for the improvement of night vision according to any one of Claims 1 2 or 4 
characterized in that the law of transformation (0 associates, to each gray level g of a pixel' 
of a captured image, a gray level g' such that: en 

9-f(9.x l y) = G(x.y)(1-e- , * ty,9 )or 

S' 88 1 if the preceding result is greater than 1, 

where x and y are the coordinates of the pixel in the image and where G(x, y) and k (x, y) are 
parameters characterizing the said transformation and are dependent on coordinates x and y of 
the pixel in which the above is applied. 

6- Process for the improvement of night vision according to any one of Claims 1, 2, or 3, 
characterized in that the law of transformation (h) associates, to each gray level g of a pixel of 
the captured image, a gray level g' such that: 

g' = h(g,y) = S(y)(1-e 4Mfl )or 

g' = 1 if the preceding result is greater than 1, 

Where S(y) and t(y) are parameters which characterize the transformation h and which are 
dependent on ordinate y (or line number) of the pixel to which the said transformation is applied. 
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Process for the improvement of night vision according to Claim 5 or 6 rh^rt^^A • m 
the lawof trans formation (f, h) of Uy .eve.s is d^™^^^^ 

Device for the improvement of night vision for the execution of the process according to 
one of the precedmg clatms, of a type including a camera (20) equipped with CCD sensors 
21 and a p.lotmg module (22) for the said sensors, characterized in that it has a m Zy 

szzzsiizr^ va,ues of 11,6 ,aw ° f « h > «™ ss 

Device for the improvement of night vision according to Claim 8, characterized in that the 
storage address of each value (g'), image through the transformation (h) of a grayTeve! g of 

x:LStrsSs: inates x and y of ^ image is fo ™ d by the 

-the gray level (g) of the pixel, and 
-the ordinate (y) of the said pixel. 

Device for the improvement of night vision according to Claim 9, characterized in mat the 
storage address of each value (g') image 1 through the transformation (f) of a gray level (a) 
of a p.xel located at coordinates x and y of the image, integrates in its formation die 
abscissa (x) of the said pixel. 

1 1- Device for the improvement of night vision according to either Claim 9 or 10, characterized 
in that the storage address of each value (g'), image through the transformation (f, h) of a 
gray level (g) of a pixel located at coordinates x and y of the image, integrates in its 
formation a parameter (p) of the setting of the said transformation. 

12- Device for the improvement of night vision according to any one of Claims 8, 9, 10 or 1 1, 
characterized in that it includes a line counting circuit delivering the ordinate (y) of the said 
pixel for each pixel of the image. 

13- Device for the improvement of night vision according to Claim 12, characterized in that in 
addition it includes a column counting circuit delivering, for each pixel of the image, the 
abscissa (x) of the said pixel. 

14- Device for the improvement of night vision according to Claims 8 to 13 on condition of 
their dependence on Claim 7, characterized in that it has a microcontroller (26 delivering 
♦the setting parameter (p) of the transformation (f, h). 



i IL Now - There seems to be a problem with the usage of this word in French: when used as a verb or a noun, the 
sentence is not grammatically correct nor does it make much sense, there may be an accent missing, similarly in the 
paragraph below. 
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Figure Legends 4 : 



Fig. 2 

Left: Gray level after transformation 
Bottom: Initial gray level 

Fig. 3 

21 : Matrix of CCD sensor 
24: Analog-digital converter 
39a: Line counter 
39b: Column counter 
51: LUT 

26: Microcontroller 

54: Image storage memory 

8: Image viewing monitor 

Fig. 4b 

Address 

Datum 

Number of bits 

Fig. 4c: 
Memory 

Fig. 6: 

21 .Matrix of CCD sensors 
24: Analog-digital converter 
39: line counter 
52: LUT 

26: Microcontroller 

54: Image storage memory 

Image viewing monitor 



4 IL Note - Piease refer to numbered original for all figure legends. 
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(54) PROCEDE ET DISPOSIT1F O f AMELIORATION DE LA VISION NOCTURNE, NOTAMMENT POUR VEHICULE 
^ AUTOMOBILE. 

(5?) L'invention concerns un procede d'amelioration de la 
v?Sion nocturne, notamment pour vehicule automobile, 
consistant, au moyen d*un systeme de prise de vue sensi- 
ble aux rayonnements visibles et non visibtes, a saisir une 
image de la chaussee. eclairee par des projecteurs emet- 
lant dans les domaines du rayonnement visible et/ou d a 
invisible, ladlte Image dtant constitute de pixels, pomte 
elementalres ayant chacun un niveau de gris, et a appi - 
quer a ladite image une LUT, loi de transformation des ni- 
veaux de gris, caracterise en ce qua au moins deux lois de 
transformation differentes sont appliquees a des groupes 
de pixels distlncts de I'image. * 

invention conceme ecalement un disposttt pour la 
mise en oeuvre du procede d'amelioration de la vision noc- 
turne decrit precedemment. 

Application a Taide a la vision nocturne pour les vehlcu- 
les automobiles. 
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I, Janet Stewart,. i^W'^M^^M^ a professional translator 
experienced in translating" ^iei^md^i^oil publications, and that the 
foregoing is a true aad^y&V^^ra\ibtf of "Procdde et dispositif 
rfwi: ^ a, u - p0U r vehicule automobile" 
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